word rank | frequency | word |
---|---|---|
1 | 36145 | його |
2 | 32696 | року |
3 | 25601 | було |
4 | 20066 | може |
5 | 19392 | який |
word rank | frequency | word |
---|---|---|
1 | 15786 | роботи |
2 | 13174 | тільки |
3 | 11879 | більше |
4 | 11104 | можуть |
5 | 10395 | участь |
word rank | frequency | word |
---|---|---|
1 | 11881 | розвитку |
2 | 7383 | навчання |
3 | 7127 | потрібно |
4 | 7099 | сьогодні |
5 | 5780 | компанії |
word rank | frequency | word |
---|---|---|
1 | 10483 | діяльності |
2 | 8746 | проведення |
3 | 8604 | управління |
4 | 6658 | можливість |
5 | 5994 | інформації |
word rank | frequency | word |
---|---|---|
1 | 6095 | забезпечення |
2 | 5683 | університету |
3 | 5605 | використання |
4 | 4045 | підприємства |
5 | 4009 | українського |
word rank | frequency | word |
---|---|---|
1 | 3033 | самоврядування |
2 | 2168 | обслуговування |
3 | 1751 | законодавством |
4 | 1337 | господарювання |
5 | 1227 | функціонування |
Slope |
---|
-1.076065737211101 |
Slope |
---|
-0.6899386230463327 |
Slope |
---|
-0.6247703822508193 |
Slope |
---|
-0.6996124522630787 |
Slope |
---|
-0.7651398799323212 |
Slope |
---|
-0.7907472711454495 |
The validity of Zipf’s law for all words does not imply its validity for words of fixed length. The tables show the most frequent words for fixed word lengths 4, 6, 8, …, 14.
The diagram implies that Zipf’s law is still valid, at least for larger word length.
The diagrams are interesting for language comparison. In the case of a diagram of very different shape there might have been problems in preprocessing which should be visible elsewhere. Or, more interesting, there might be special features inherent to this language.
For length 8:
SELECT freq ,word FROM words WHERE w_id>100 and char_length(word)=8;
Explain why we see better agreement with Zipf’s law for larger word length.
Zipf’s law (Classic version)